iT邦幫忙

2023 iThome 鐵人賽

DAY 2
0
AI & Data

30天賞金獵人養成日記:在打AI競賽的路上奪命狂奔系列 第 2

[Day 2] CommonLit - Evaluate Student Summaries 介紹

  • 分享至 

  • xImage
  •  

比賽打卡記錄:
資料集會給定 prompt 的 question, text,以及學生針對這個 prompt 寫的 summary text 和老師根據學生寫的這個 summary 針對 content 與 wording 的打分。目前的做法是先使用 all-MiniLM-L6-v2 這個 sentence simmilarity model 計算 prompt text 和 summary text 的 embedding similarity score,之後再把這個 similarity score 和 content, wording 的分數組成 (x, y) pair,拿去訓練一個 SVM model,最終在 public score 是 0.839。


上一篇
[Day 01] 賽池介紹
下一篇
[Day 03] LLM Science Exam 介紹
系列文
30天賞金獵人養成日記:在打AI競賽的路上奪命狂奔3
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

尚未有邦友留言

立即登入留言